GraphVid: Interactive Graph-Controllable Video Generation
GraphVid:交互图控制的多对象视频生成
🧭 结构化场景图控制视频生成
University of Illinois Urbana-Champaign · Sony Research India
提出用可编辑场景图作为条件,实现精确多对象交互的图像到视频生成
📌 工作参考价值(4 点)
- 商品互动视频生成:在电商场景中,利用图关系描述商品之间的使用关联(如「手机–支付终端–用户」),自动化生成展示商品动态交互的营销视频。
- 轻量可控生成框架:冻结视频扩散骨干,仅训练图条件注入模块,大幅减少参数量和训练数据需求,能快速适配到特定领域(如试穿、3C 产品演示)。
- 非专业用户交互设计:通过拖拽编辑场景图节点和边,使无动画背景的用户也能生成多物体动态视频,降低内容制作门槛。
- 可解释的条件控制:图结构天然对应知识图谱,在推荐系统中可与商品图谱结合,实现可解释的「条件」推荐内容生成(例如按用户兴趣图谱生成个性化短视频)。